e5debf9e6aaf52cfdd9b04391b18afb248d6c605
DBMC2E + BPR + ES100
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2022-11-10 10:37:48.498497 UTC
- file basename
- out
test-A / 0b8d39b0abde1fe352fac1a63f254b44a91b9a83
| Metric | Score |
|---|---|
| NDCG@10 | 49.84 |
dev-0 / d86bc2059ac3f7ecb0adfaa92a4b07c64e4aad7c
| Metric | Score |
|---|---|
| NDCG@10 | 23.64 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-A NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 1895497-0 162911-6 2421-3 2377444-0 558531-5 2476915-1 2734948-1 2734991-1 1339527-2 1284905-9 | 0.00 |
| 2 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 4518252-14 800806-4 145643-3 54733-2 146627-0 3120956-9 2631259-6 2984799-1 2954508-16 187229-2 | 0.00 |
| 3 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 4978480-17 2375662-1 1599022-0 2992056-3 1680851-2 4805651-1 2207676-3 1799769-22 49398-0 1680868-2 | 0.00 |
| 4 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 1500704-1 74802-5 1143082-0 4258115-0 116557-1 1780062-0 1401357-1 1638746-0 1218804-0 672091-4 | 0.00 |
| 5 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 162129-4 162129-0 181284-0 941032-0 641196-0 1683720-52 3710137-7 118422-6 3264968-1 181264-0 | 0.00 |
| 6 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 489854-0 225555-0 1004592-1 489854-11 1602139-5 3121677-1 1004592-0 2342647-4 1395365-3 3519-190 | 0.00 |
| 7 | wiki-trivia Jak nazywał się twórca Polskiej Akcji Humanitarnej? | 2733-0 437349-12 4306798-3 4211917-8 | 765923-8 4399166-2 1042823-1 1514238-4 4217106-7 1000009-30 3229893-6 27660-4 3827356-1 1903361-13 | 0.00 |
| 8 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 28808-10 835051-1 21188-9 5746-126 121015-8 600284-15 745046-15 461101-1 263568-18 1965911-0 | 0.00 |
| 9 | wiki-trivia Z którego kosmodromu startował Jurij Gagarin? | 166906-0 2283748-0 2472693-1 2479587-0 | 273806-9 2101901-9 2608-0 166926-1 2608-8 3954532-5 273806-6 564380-5 1334629-38 2101901-7 | 0.00 |
| 10 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 8148-0 547665-0 3880457-7 1261823-3 3877810-5 3882318-8 2655442-0 2198008-0 1840674-1 1300575-25 | 0.00 |
| 11 | wiki-trivia W którym starożytnym mieście budowano wieżę Babel? | 10168-12 13187-9 1861864-1 | 10168-0 658-14 10168-28 471537-1 10168-5 557961-1 45284-1 1836031-13 1868343-0 1096419-35 | 0.00 |
| 12 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 354435-4 4476880-0 1576655-0 2128845-8 2128845-4 4795017-0 4710309-0 1049830-0 1487142-0 1261888-0 | 0.00 |
| 13 | wiki-trivia Z którego państwa pochodzi Stieg Larsson, autor trylogii kryminalnej „Millennium”? | 4446190-0 5018537-0 461434-5 | 2044201-2 4081812-6 1442177-0 138165-11 1442177-1 2044201-1 2130804-0 920731-0 2044201-0 4470152-3 | 0.00 |
| 14 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 113882-4 3151546-1 24742-3 136382-4 1755-1 3129571-1 5098842-2 24742-7 610227-2 169168-13 | 0.00 |
| 15 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 30332-19 917904-18 12158-14 96488-10 4699385-10 29-36 3289-16 3289-10 3289-7 3289-26 | 0.00 |
| 16 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 1848206-24 1461623-10 4201896-1 2134342-5 3481775-1 529646-15 1461623-5 4285516-5 1461623-60 239866-0 | 0.00 |
| 17 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 3678011-6 48631-5 23992-398 32943-47 771786-7 456253-2 1143976-3 184824-2 143139-38 3069011-1 | 0.00 |
| 18 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 3820485-0 45745-0 1157974-0 529069-43 3809196-5 318249-12 135900-1 65401-1 449955-0 500532-0 | 0.00 |
| 19 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 86139-1 513348-0 1484457-1 1005884-9 2783183-0 113451-9 180179-0 222491-21 98592-0 7658-3 | 0.00 |
| 20 | wiki-trivia Który car rosyjski wprowadził grażdankę? | 129904-0 908-2 22313-16 2854198-24 2705-7 | 2792260-3 3327356-0 2510536-0 121977-3 3557025-0 752470-7 8786-9 2847867-7 45252-0 22291-11 | 0.00 |
| 21 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 360609-19 20338-5 1657997-6 1552826-228 1326878-16 1826361-10 706804-25 2314724-9 875057-26 76561-23 | 0.00 |
| 22 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 4715790-35 1919191-28 3185428-10 4585432-5 1002955-29 698175-3 10536-1 2239844-21 3254-4 5977-73 | 0.00 |
| 23 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 185768-12 4115201-51 4348479-17 497735-11 40804-5 764920-19 1541774-6 390678-5 472699-113 40804-2 | 0.00 |
| 24 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 1658867-146 363695-7 30378-9 552783-1 1048048-3 209672-12 363695-9 1765337-4 3267240-5 828197-4 | 0.00 |
| 25 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 1209122-0 1874026-0 2028372-13 1209122-1 115440-0 1874026-1 1219119-0 5531-0 1193751-0 4177338-0 | 0.00 |
| 26 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 1418508-339 189959-1 2048728-5 4413578-6 1809833-3 4413539-2 4196919-1 193584-2 5156150-14 134896-1 | 0.00 |
| 27 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 2311468-1 3136885-4 43683-10 43683-7 7-74 7-31 43681-3 2311468-5 984901-8 43683-6 | 0.00 |
| 28 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 685822-2 4905635-13 2274-112 2733663-98 1219607-4 1226710-2 308840-5 2266318-332 1197116-6 911595-6 | 0.00 |
| 29 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 4376936-5 6959-15 227384-1 993548-53 1935365-2 2138569-3 636018-6 2921662-0 5131340-0 7859-71 | 0.00 |
| 30 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 824743-3 4181943-6 5060493-2 2910023-1 403192-4 1827042-13 3674136-0 3243471-11 1145569-0 1003257-1 | 0.00 |
| 31 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 24742-9 5422-2 30330-19 182850-2 10783-3 30333-0 30332-1 24742-4 1130520-3 8807-0 | 0.00 |
| 32 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 2070144-0 5047935-0 1906305-0 5047935-16 904989-6 2130812-4 1309650-5 5016891-4 2847383-0 1746085-11 | 0.00 |
| 33 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 2461754-10 3574207-12 2462290-7 3004694-1 2433825-14 1073172-8 8653-3 52406-49 632-231 655213-1 | 0.00 |
| 34 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 391783-28 523654-0 391783-4 391783-7 1091335-0 1575402-9 3299821-51 2848803-175 1322911-1 430637-92 | 0.00 |
| 35 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 68774-113 3520259-2 428616-7 4369874-32 191002-5 655344-2 5128431-61 3144098-1 5090854-3 540542-4 | 0.00 |
| 36 | wiki-trivia Jak nazywa się jadalnia dla załogi na statku? | 16828-0 | 391783-0 1157112-13 3500862-0 4974149-0 1280758-20 789944-0 1151872-5 5096551-8 1568420-10 86725-0 | 0.00 |
| 37 | wiki-trivia W którym roku Otton III i Bolesław Chrobry spotkali się na zjeździe gnieźnieńskim? | 2048803-0 1930212-0 8196-0 44843-1 411720-13 | 178262-4 1643632-8 1918-22 44843-2 10559-0 20984-5 626730-43 591810-6 13704-0 913829-7 | 0.00 |
| 38 | wiki-trivia Jak nazywał się pancernik, który rozpoczął II wojnę światową? | 14103-0 1815538-17 2304-13 89007-6 3241-119 | 5166625-34 3209828-3 3457704-1 4112795-3 276056-0 24514-4 1680078-1 2535773-10 963929-1 4931075-1 | 0.00 |
| 39 | wiki-trivia Jak nazywa się pisarz, autora „Dziennika pisanego nocą”? | 152861-6 3449-50 84545-6 | 23326-11 4882419-4 3449-34 4616901-4 4916441-14 2346425-7 4117762-2 894178-4 4940749-1 1443993-6 | 0.00 |
| 40 | wiki-trivia Jak miała na imię żona Heraklesa? | 3136602-0 39725-0 11468-0 11468-22 39725-2 | 27899-48 1081971-1 12500-15 904627-0 2285-14 2788551-8 455904-1 1906318-11 12500-0 544826-0 | 0.00 |